Nature:如何使用AI分析真实世界数据,简化肿瘤临床试验入组标准
临床试验的高失败率
2018年,麻省理工学院的研究人员曾分析了2000年1月1日至2015年10月31日期间,超过21,143个化合物的406,038条临床试验数据,结果发表在Biostatistics杂志上。
临床试验入组标准可能过于严格
美国国家癌症研究所的专家认为,入组标准可能淘汰了合适的受试者,所以应该考虑简化和扩大范围。FDA也有类似的表述,认为某些人群通常在没有充分的临床理由的情况下被排除在临床试验之外。在美国临床肿瘤学会的一项评估中,56%的受访临床医生同意有些标准过于严格,损害了临床试验。
AI发现许多入组标准对试验结果影响甚微
这个问题可以转换为另一种表述方式,那就是:各个特征是如何最终影响和决定模型的输出。这样的话,就可以采用Shapley值法(一种AI的归因方法)来分析了。
2021年4月,斯坦福大学的James Zou等人在Nature杂志发表文章,使用一种AI工具Trial Pathfinder,从肿瘤患者的真实世界数据中学习,来优化入组标准的包容性。分析结果显示,许多常见的入组标准,对临床试验的结果影响甚微。
研究指标。入组标准对临床试验结果的影响,以总生存期的风险比(Hazard Ratio, HR)为指标。风险比越低,治疗的获益越大。
研究工具。Trial Pathfinder是研究团队开发的一个框架,可以整合真实世界数据,系统分析不同入组标准下队列总生存期的风险比,评估包含或忽略临床试验中的某些入组标准后产生的效果。
数据来源。该研究使用了Flatiron Health EHR衍生的数据库,其中包括来自美国大约280家癌症中心的去除身份识别的61,094例晚期非小细胞肺癌(aNSCLC)患者的数据。
Trial Pathfinder的工作流程分为两大部分。
首先是临床试验模拟。Trial Pathfinder将真实世界数据和目标试验方案(治疗和资格标准)作为输入。根据患者特征、诊断、实验室值、生物标志物和先前的治疗方法,以编程方式对不同的入组标准(从文本中提取)进行编码,并使用倾向评分的加权分析法(propensity score weighting)进行临床试验模拟。然后,对模拟的治疗组进行生存分析,并报告符合条件的患者数和由此产生的风险比。
其次是分析。Trial Pathfinder将标准的重要性分析与Shapley值相结合,评估了每个纳入/排除标准如何影响合格受试者的数量和试验结果。
扩大入组标准后,入组人数平均增加一倍多
研究发现,当使用数据驱动的方法来扩大入组标准时,可使符合标准的受试者平均从1,553人增加到3,209人,同时总生存期的风险比平均下降了0.05。新的入组标准平均删除了9个纳入/排除标准。这表明,许多在原先试验标准下不符合条件的患者有可能从治疗中受益。
不同入组标准的比较
研究结果得到进一步验证
在使用无进展生存期(progression-free survival)这一不同的临床终点时,结果仍然是一致的。
研究还分析了其他类型的癌症,如结肠直肠癌、晚期黑色素瘤和转移性乳腺癌,也发现了不利于试验的限制性标准。Trial Pathfinder的分析表明,当使用数据驱动的方法来扩大入组标准时,对于患有其它类型的癌症的患者来说,符合标准的受试者和数量可以平均增加53%。
AI+RWE改进临床试验设计的前景
本研究主要针对数据量最为丰富的非小细胞肺癌来研究,体现了临床试验入组标准设计中使用AI的价值,可能会推动AI在临床试验中的进一步应用。
然而要做到这一点,还需要克服数据质量局限性方面的挑战。比如,完整的临床试验方案的可获得性、数据库的完整性等。
该研究使用的Flatiron数据库经过精心设计和统一编码,而来自其他EHR系统的数据通常更具可变性,并且完整性和准确性也有所不同。此外,肿瘤以外的其他疾病,目前还很难具有丰富的真实世界数据,并且可能有更为复杂的终点。
但随着更多高质量数据的出现,这项工作将有机会扩展到肿瘤之外的其他疾病。
代码可用性
可以在
GitHub(https://github.com/RuishanLiu/TrialPathfinder)上获得Trial Pathfinder的开源Python代码。
----------- End -----------
感兴趣的读者,可以添加小邦微信(zhiyaobang2020)加入读者实名讨论微信群。添加时请主动注明姓名-企业-职位/岗位 或姓名-学校-职务/研究方向。
FDA发布RWE用于支持医疗器械监管决策的90个示例,药物相关RWE文件年内发布
真实世界数据生成真实世界证据:使用AI的价值和意义
CDE发布《用于产生真实世界证据的真实世界数据指导原则(征求意见稿)》
远程机器人实验室在AI药物发现中的应用价值与前景
AI药物研发公司Insilico Medicine的理念、技术与特点
2020年AI + 药物研发全景概述:(四) 制药公司与AI的合作
利用人工智能增强表型药物发现
弥合理论与行动的差距:如何在业务中正确的部署AI
20家顶尖制药公司如何将AI应用于药物研发:近年来主要合作活动
FDA发布人工智能/机器学习行动计划